Web crawler research methodology

In economic and social sciences it is crucial to test theoretical models against reliable and big enough databases. The general research challenge is to build up a well-structured database that suits well to the given research question and that is cost efficient at the same time. In this paper we focus on crawler programs that proved to be an effective tool of data base building in very different problem settings. First we explain how crawler programs work and illustrate a complex research process mapping business relationships using social media information sources. In this case we illustrate how search robots can be used to collect data for mapping complex network relationship to characterize business relationships in a well defined environment. After that extend the case and present a framework of three structurally different research models where crawler programs can be applied successfully: exploration, classification and time series analysis. In the case of exploration we present findings about the Hungarian web agency industry when no previous statistical data was available about their operations. For classification we show how the top visited Hungarian web domains can be divided into predefined categories of e-business models. In the third research we used a crawler to gather the values of concrete pre-defined records containing ticket prices of low cost airlines from one single site. Based on the experiences we highlight some conceptual conclusions and opportunities of crawler based research in e-business. --e-business research,web search,web crawler,Hungarian web,social network analyis

Az időstársadalom várható kihívásait kezelő beavatkozási területek azonosítása

Az idősödő társadalom leíró elemzése mellett fontos meghatározni azokat a pontokat, amelyek mentén az esetleges társadalmi torzulások a munkaerő, a közösség és a szellemi vagy fizikai aktivitás tekintetében helyreállíthatók vagy legalábbis javíthatók. A tanulmány szerzői egy 2009-ben elvégzett kérdőíves felmérés eredményei alapján tematikusan végighaladva a lehetőségeken kísérletet tesznek ezeknek a beavatkozási pontoknak az azonosítására és a vizsgált változók közötti összefüggések számszerűsítésére

E-business-modellek a magyarországi diszkont légitársaságok piacán

A diszkont légitársaságok üzleti modellje az internet köré épül, amely egyrészről az iparág szélesen kihasznált e-business-spektrumát, másrészről a turisztikai ipar dinamikus infokommunikációs fejlődését mutatja. A fapados légitársaságok térnyerése, kiegészülve az egyre növekvő technológiai affinitás jelenségével, olyan régiókban is teret ad az e-kereskedelem infrastrukturális fejlődésének, ahol korábban az e-felkészültség meglehetősen alacsony szinten állt. A szerzők cikkükben a Magyarországon versenyző fapados légitársaságok internetes megjelenését és webes szolgáltatásait mutatják be, mintegy esettanulmányként ennek illusztrálására

Production system efficiency optimization through application of a hybrid artificial intelligence solution

Industry 4.0 seeks waste reduction via the optimization of production systems integrating technology and process. In addition to evaluating existing methods and technologies, academia also develops new ones. This research proposes a new hybrid artificial intelligence (AI) solution for production system efficiency optimization that combines data envelopment analysis (DEA), machine learning (ML)-based simulation and genetic algorithms (GAs) using real-world sensor data from a thermoelectric power plant. In the proposed method, DEA is employed to identify the production system’s efficient frontier, which is used to build an ML model that predicts production efficiency through simulation. A genetic algorithm is then utilized to propose those settings that result in optimized production efficiency. Although the possibility of combining DEA-ML and ML- GA has been discussed in the literature, no research was found that combines these three methods for production efficiency optimization. The proposed solution was tested and validated using real- world data. The benefits of the hybrid AI solution were measured by comparing its predicted efficiency with the efficiencies achieved by running production with conventional control-loops based control systems. The results show that considerable efficiency improvement can be achieved using the proposed hybrid AI solution

A magyar webes piac technológiai architektúrái

A magyar világháló „szürke eminenciásai” a webes ügynökségek, amelyek megbízóik számára professzionális tartalmakat, általában megjelenést építenek fel. E piaci szegmens néhány ismertebb képviselője a Kirowski, a Carnation, az Arcus (egykori Mirai), az Euroweb, a BigFish, a ProWeb, illetve néhány más, hasonló kaliberű on-line vállalkozás. Bátran állíthatjuk, hogy az elmúlt tíz évben Magyarország egyik húzó iparágává váltak, de ehhez képest igen keveset ismerünk működési modelljeikről, iparáguk struktúrájáról és a webes modellek alkalmazói számára nyújtott szolgáltatásspektrumról. A szerzők kutatásának célja olyan úttörő munka elvégzése volt, amely először tárja fel a hazai webes szolgáltatók értékláncmodelljét, illetve piaci befolyásukat. Emellett megvizsgálták a szektor szereplőinek egymáshoz és a különböző internetes technológiákhoz való viszonyát, feltérképezték a legjelentősebb technológiai lekötések helyzetképét is